<!DOCTYPE html>
<html>
<head>
  <meta charset="utf-8">
  

  
  <title>帧同步和状态同步笔记 | Abel&#39;Blog</title>
  <meta name="viewport" content="width=device-width, initial-scale=1, maximum-scale=1">
  <meta name="description" content="资料都来自于网络。  前言 网络同步模式的演化史 概念 P2P模型 Packet Server（包的简单中继） Client Server （Quake I&#x2F;II&#x2F;III） 响应性和预判 延迟补偿的潜在问题 工程问题：逻辑和预测代码分离 插值&#x2F;推导的局限性 压缩、状态同步冗余、固定字长   工程实践 怪物数据同步   参考  前言在制作网络游戏的时候，经常会讨论同步方式。同步这个话题就是让不同客户">
<meta property="og:type" content="article">
<meta property="og:title" content="帧同步和状态同步笔记">
<meta property="og:url" content="http://example.com/2021/01/23/2021/2021-02-23-%E5%B8%A7%E5%90%8C%E6%AD%A5%E5%92%8C%E7%8A%B6%E6%80%81%E5%90%8C%E6%AD%A5/index.html">
<meta property="og:site_name" content="Abel&#39;Blog">
<meta property="og:description" content="资料都来自于网络。  前言 网络同步模式的演化史 概念 P2P模型 Packet Server（包的简单中继） Client Server （Quake I&#x2F;II&#x2F;III） 响应性和预判 延迟补偿的潜在问题 工程问题：逻辑和预测代码分离 插值&#x2F;推导的局限性 压缩、状态同步冗余、固定字长   工程实践 怪物数据同步   参考  前言在制作网络游戏的时候，经常会讨论同步方式。同步这个话题就是让不同客户">
<meta property="og:locale" content="en_US">
<meta property="article:published_time" content="2021-01-22T16:00:00.000Z">
<meta property="article:modified_time" content="2021-07-28T09:14:35.610Z">
<meta property="article:author" content="Abel Sean">
<meta property="article:tag" content="Game">
<meta name="twitter:card" content="summary">
  
    <link rel="alternate" href="/atom.xml" title="Abel&#39;Blog" type="application/atom+xml">
  
  
    <link rel="icon" href="/favicon.png">
  
  
    <link href="//fonts.googleapis.com/css?family=Source+Code+Pro" rel="stylesheet" type="text/css">
  
  
<link rel="stylesheet" href="/css/style.css">

<meta name="generator" content="Hexo 5.4.0"></head>

<body>
  <div id="container">
    <div id="wrap">
      <header id="header">
  <div id="banner"></div>
  <div id="header-outer" class="outer">
    <div id="header-title" class="inner">
      <h1 id="logo-wrap">
        <a href="/" id="logo">Abel&#39;Blog</a>
      </h1>
      
    </div>
    <div id="header-inner" class="inner">
      <nav id="main-nav">
        <a id="main-nav-toggle" class="nav-icon"></a>
        
          <a class="main-nav-link" href="/">Home</a>
        
          <a class="main-nav-link" href="/archives">Archives</a>
        
      </nav>
      <nav id="sub-nav">
        
          <a id="nav-rss-link" class="nav-icon" href="/atom.xml" title="RSS Feed"></a>
        
        <a id="nav-search-btn" class="nav-icon" title="Search"></a>
      </nav>
      <div id="search-form-wrap">
        <form action="//google.com/search" method="get" accept-charset="UTF-8" class="search-form"><input type="search" name="q" class="search-form-input" placeholder="Search"><button type="submit" class="search-form-submit">&#xF002;</button><input type="hidden" name="sitesearch" value="http://example.com"></form>
      </div>
    </div>
  </div>
</header>
      <div class="outer">
        <section id="main"><article id="post-2021/2021-02-23-帧同步和状态同步" class="article article-type-post" itemscope itemprop="blogPost">
  <div class="article-meta">
    <a href="/2021/01/23/2021/2021-02-23-%E5%B8%A7%E5%90%8C%E6%AD%A5%E5%92%8C%E7%8A%B6%E6%80%81%E5%90%8C%E6%AD%A5/" class="article-date">
  <time datetime="2021-01-22T16:00:00.000Z" itemprop="datePublished">2021-01-23</time>
</a>
    
  </div>
  <div class="article-inner">
    
    
      <header class="article-header">
        
  
    <h1 class="article-title" itemprop="name">
      帧同步和状态同步笔记
    </h1>
  

      </header>
    
    <div class="article-entry" itemprop="articleBody">
      
        <p>资料都来自于网络。</p>
<ul>
<li><a href="#%E5%89%8D%E8%A8%80">前言</a></li>
<li><a href="#%E7%BD%91%E7%BB%9C%E5%90%8C%E6%AD%A5%E6%A8%A1%E5%BC%8F%E7%9A%84%E6%BC%94%E5%8C%96%E5%8F%B2">网络同步模式的演化史</a><ul>
<li><a href="#%E6%A6%82%E5%BF%B5">概念</a></li>
<li><a href="#p2p%E6%A8%A1%E5%9E%8B">P2P模型</a></li>
<li><a href="#packet-server%E5%8C%85%E7%9A%84%E7%AE%80%E5%8D%95%E4%B8%AD%E7%BB%A7">Packet Server（包的简单中继）</a></li>
<li><a href="#client-server-quake-iiiiii">Client Server （Quake I/II/III）</a></li>
<li><a href="#%E5%93%8D%E5%BA%94%E6%80%A7%E5%92%8C%E9%A2%84%E5%88%A4">响应性和预判</a></li>
<li><a href="#%E5%BB%B6%E8%BF%9F%E8%A1%A5%E5%81%BF%E7%9A%84%E6%BD%9C%E5%9C%A8%E9%97%AE%E9%A2%98">延迟补偿的潜在问题</a></li>
<li><a href="#%E5%B7%A5%E7%A8%8B%E9%97%AE%E9%A2%98%E9%80%BB%E8%BE%91%E5%92%8C%E9%A2%84%E6%B5%8B%E4%BB%A3%E7%A0%81%E5%88%86%E7%A6%BB">工程问题：逻辑和预测代码分离</a></li>
<li><a href="#%E6%8F%92%E5%80%BC%E6%8E%A8%E5%AF%BC%E7%9A%84%E5%B1%80%E9%99%90%E6%80%A7">插值/推导的局限性</a></li>
<li><a href="#%E5%8E%8B%E7%BC%A9%E7%8A%B6%E6%80%81%E5%90%8C%E6%AD%A5%E5%86%97%E4%BD%99%E5%9B%BA%E5%AE%9A%E5%AD%97%E9%95%BF">压缩、状态同步冗余、固定字长</a></li>
</ul>
</li>
<li><a href="#%E5%B7%A5%E7%A8%8B%E5%AE%9E%E8%B7%B5">工程实践</a><ul>
<li><a href="#%E6%80%AA%E7%89%A9%E6%95%B0%E6%8D%AE%E5%90%8C%E6%AD%A5">怪物数据同步</a></li>
</ul>
</li>
<li><a href="#%E5%8F%82%E8%80%83">参考</a></li>
</ul>
<h1 id="前言"><a href="#前言" class="headerlink" title="前言"></a>前言</h1><p>在制作网络游戏的时候，经常会讨论同步方式。同步这个话题就是让不同客户端的游戏表现同步。</p>
<p>王者荣耀是使用的帧同步(Lockstep)，有成功案例，后续才会有很多人想着跟进。</p>
<p>帧同步：服务器按照帧转换客户端的操作，其他客户端依赖这些信息在本地模拟表现。</p>
<p>状态同步：客户端操作的时候，只能将状态数据提交给服务器，服务器得到了通过运算将最终结果广播给全部客户端。</p>
<p>成功案例清单：</p>
<table>
<thead>
<tr>
<th align="left"></th>
<th align="left">帧同步</th>
<th align="left">状态同步</th>
</tr>
</thead>
<tbody><tr>
<td align="left">FPS</td>
<td align="left">doom</td>
<td align="left">CSGO、守望先锋、逆战、绝地求生</td>
</tr>
<tr>
<td align="left">MOBA</td>
<td align="left">王者荣耀、DOTA、英雄战境</td>
<td align="left">全民超神、LOL、DOTA2</td>
</tr>
<tr>
<td align="left">SPT</td>
<td align="left">NBAOline、街头篮球、FIFA</td>
<td align="left"></td>
</tr>
<tr>
<td align="left">FGT,ACT</td>
<td align="left">街霸</td>
<td align="left">怪物猎人</td>
</tr>
<tr>
<td align="left">RTS</td>
<td align="left">星际争霸、魔兽争霸</td>
<td align="left"></td>
</tr>
<tr>
<td align="left">MMO</td>
<td align="left">全民斗战神</td>
<td align="left">魔兽世界、轩辕传奇、天涯明月刀</td>
</tr>
<tr>
<td align="left">RAC</td>
<td align="left"></td>
<td align="left">QQ飞车</td>
</tr>
<tr>
<td align="left">其他</td>
<td align="left">街机、主机模拟器、刀塔传奇、剑与家园</td>
<td align="left">各种类型都有</td>
</tr>
</tbody></table>
<p>大量玩家参与的游戏只能使用状态同步。要求及时性高，</p>
<p>本文就记录一下同步的差异，各项资料都来自于baidu搜索的。其实在google上搜索，也没有看老外大量使用 state sync，frame sync，frame lock sync之类的文章。可能是我使用的词汇有问题。</p>
<h1 id="网络同步模式的演化史"><a href="#网络同步模式的演化史" class="headerlink" title="网络同步模式的演化史"></a>网络同步模式的演化史</h1><p>参考文档有：《The-DOOM-III-Network-Architecture》</p>
<ul>
<li><p>J.M.P. van Waveren</p>
</li>
<li><p>March 6th 2006</p>
</li>
</ul>
<h2 id="概念"><a href="#概念" class="headerlink" title="概念"></a>概念</h2><p>游戏需要再四个要素上做平衡：</p>
<p>一致性，响应性，带宽，延迟</p>
<p>FPS实体列表：</p>
<p>玩家，怪物，导弹，门。</p>
<p>参与者去管理和维护自由的那份拷贝，一种实现是通过施加一致性的逻辑推动所有的状态去同步地更新，另一种实现是随着时间的流逝不断地比较和发送最小的状态变化和差异。</p>
<h2 id="P2P模型"><a href="#P2P模型" class="headerlink" title="P2P模型"></a>P2P模型</h2><p>Doom（1994）的网络模型是完全同步的P2P系统。每秒对玩家动作（move/turn/use/fire, etc.) 采样 35 次 (得到一个 tick command) 并发送给其他所有玩家，每个玩家都接受来自所有玩家的 tick command，当某个玩家收到所有其他玩家的下一帧 tick command 后，该玩家的本地游戏状态推进到下一帧。这样的后果是全局性的延迟 (每个玩家从做出动作到收到反馈的响应时间) 由<strong>最慢网络</strong>连接的玩家决定。</p>
<p>存在问题清单：</p>
<ol>
<li>所有玩家都需要主动维护完美的状态同步，由于硬件不同(有时甚至是未初始化的变量)等引入的不一致，会让每个参与者细微的不同被累积下来，导致参与者之间显著的视觉和逻辑的差异。这种不一致的引入很难查，因为只有当它们累积起来才会有明显的效果，而等感觉到差异时，真正的问题已经发生很久了。</li>
<li>完全同步的网络无法跨平台。不同的硬件上，由不同编译器生成的汇编指令有时会产生轻微不同的行为 (浮点指令尤甚)。</li>
<li>随着玩家数量增长，延迟会迅速变得难以接受。而且只要有一个玩家的网络有波动，会影响到所有人的体验。<br>随着玩家数量增长，带宽需求会指数性地同步增长。</li>
<li>同步网络由于只发送 tick command，所有玩家必须同时启动游戏 (来保证游戏状态的一致性) 无法做到随时的加入和退出。</li>
<li>由于玩家本地维护了所有的状态，方便了作弊的实现。</li>
</ol>
<h2 id="Packet-Server（包的简单中继）"><a href="#Packet-Server（包的简单中继）" class="headerlink" title="Packet Server（包的简单中继）"></a>Packet Server（包的简单中继）</h2><p>P2P模型上增加Packet Server，将接受到的tick command转发，这样减少了客户端直接的链接。能解决某个玩家慢的问题。</p>
<h2 id="Client-Server-（Quake-I-II-III）"><a href="#Client-Server-（Quake-I-II-III）" class="headerlink" title="Client Server （Quake I/II/III）"></a>Client Server （Quake I/II/III）</h2><p>Quake I/II/III 实现了比较典型的 C/S 架构 (1996)，这个模型中服务器负责所有的逻辑判断，客户端本质上只是一个渲染终端。玩家把自己的操作和输入发送给服务器，收到一个实体列表用于渲染。服务器把压缩后的快照发给客户端 (10-20Hz) 客户端使用这些快照来插值或推导出平滑连贯的体验 (interpolates between, or extrapolates from the last two snapshots)。</p>
<p>在一般情况下(比如在古代的引擎Quake 1中)，客户端收集到用户命令后发送给服务器，此后就在等待服务器返回新的游戏状态。这是很笨的。在Quake 3中，客户端不会傻等，而会预测可能的游戏状态，其实预测状态所用的代码跟服务器端的代码是一样的，所以服务器端的状态和客户端的状态往往是一致的。如果确实不一致，则“服务器为准原则”将生效。</p>
<p>“Quake III Arena 网络协议规范(非官方)”</p>
<h2 id="响应性和预判"><a href="#响应性和预判" class="headerlink" title="响应性和预判"></a>响应性和预判</h2><p>这个模型同样有响应性问题，从输入的采样和发送到屏幕反馈同样需要一个 roundtrip 延时。为了克服延时客户端预测了玩家的下一步行动 (在之前的 blog中有提到)。玩家的输入在发出去的同时，本地立刻处理，而环境状态做了上文说到的 interpolate/extrapolate，也就是说玩家看到的自身是 (可预计的) 操作结果，而其他人是过去的状态。(这一点与魔兽世界是一致的) 这个 C/S 架构是异步的。对任何一个玩家而言，服务器的全局模拟落后于该玩家在本地的实际操作快照，而环境的状态同步更是落后于全局模拟。</p>
<p>这个模型允许中途加入和退出 (除了做 server 的玩家，如果不是 dedicated 的话)。由于玩家的判断基于的是其他玩家过去的状态，实际的击中检测发生在晚些时候的服务器上，在延时较高的情况下，玩家需要不断考虑延时状况并打提前量才能在未来的实际判断中击中对方。</p>
<h2 id="延迟补偿的潜在问题"><a href="#延迟补偿的潜在问题" class="headerlink" title="延迟补偿的潜在问题"></a>延迟补偿的潜在问题</h2><p>半条命在这个基础上引入了一种特定的延迟补偿 (lag compensation)，当玩家向某个目标 (若干毫秒前的状态) 射击时，做实际检测的服务器会采用该目标若干毫秒前的状态来检验是否击中。这么做需要服务器把之前一小段时间的状态持续地保存下来，这样不仅增加了实现复杂度，而且导致了某种程度的不一致性。延时高的玩家反而更容易因为补偿获得更有利的判断，严重影响游戏体验 (实例见这里第六页末尾，值得一读)。这种补偿只能对目标的位置回滚，而所有其他环境状态的改变却已无法倒退，这也会影响实际的体验。</p>
<h2 id="工程问题：逻辑和预测代码分离"><a href="#工程问题：逻辑和预测代码分离" class="headerlink" title="工程问题：逻辑和预测代码分离"></a>工程问题：逻辑和预测代码分离</h2><p>Q3 里服务器上跑的逻辑代码 (“game code”) 跟客户端跑的渲染和预测代码 (“client game code”) 实现在物理上不同的模块里，但却需要对彼此的内部细节非常清楚 (才能保证预测和实际行为的一致性)。这个强耦合使得扩展游戏变得很困难，这也是难以实现单人游戏模式的原因之一。有时使用 Q3 引擎的游戏得为多人模式和单人模式发布两个不同的 exe，其中单人模式直接使用 game code 来简化逻辑流程。</p>
<h2 id="插值-推导的局限性"><a href="#插值-推导的局限性" class="headerlink" title="插值/推导的局限性"></a>插值/推导的局限性</h2><p>由于快照的接收频率往往低于实际渲染的帧速，就需要上文提到的 interpolate/extrapolate，考虑物理模拟和交互的话，(为了跟服务器逻辑一致) 推导会增加额外的实现复杂度。这些插值对位置数据很有效，但其他一些状态很难插值，有时性能也是问题，比如四元数的 slerp 就挺费的 (上一篇末尾提到了相关的优化)</p>
<h2 id="压缩、状态同步冗余、固定字长"><a href="#压缩、状态同步冗余、固定字长" class="headerlink" title="压缩、状态同步冗余、固定字长"></a>压缩、状态同步冗余、固定字长</h2><p>Quake III 里只有在 PVS 内的实体才会被同步状态，而且被同步的是压缩后的与上一次同步比较的差值 (delta compressed relative to the entity states from a previous snapshot) 这导致的结果是如果一个物体频繁进出 PVS 就没法做 delta 比较，总是发送完整状态，会导致不少冗余的同步量。</p>
<blockquote>
<p>为了提高网络通讯速度，降低带宽，Quake 3中采用了压缩的技术。这并不是指用一些压缩算法来直接压缩数据。而是指，在传送游戏状态数据时，只传送改变了的游戏状态，而不是全部发送过来。一般来说，这个叫做Delta技术。</p>
</blockquote>
<p>“Quake III Arena 网络协议规范(非官方)”<br>出于简化，Q3 使用了固定长度的同步结构，导致不少字段被不同的功能各种复用，一晦涩复杂度就上去了。</p>
<h1 id="工程实践"><a href="#工程实践" class="headerlink" title="工程实践"></a>工程实践</h1><h2 id="怪物数据同步"><a href="#怪物数据同步" class="headerlink" title="怪物数据同步"></a>怪物数据同步</h2><p>将服务器计算的怪物寻路点一次性全部发送给客户端；</p>
<p>定时同步服务器已经行走到什么地方了；</p>
<p>在关键位置需要强制同步一次服务器位置给客户端。</p>
<h1 id="参考"><a href="#参考" class="headerlink" title="参考"></a>参考</h1><ul>
<li>[1] <a target="_blank" rel="noopener" href="https://zhuanlan.zhihu.com/p/104932624">帧同步和状态同步该怎么选（上）</a></li>
<li>[2] <a target="_blank" rel="noopener" href="https://zhuanlan.zhihu.com/p/105826545">帧同步和状态同步该怎么选（下）</a></li>
<li>[3] <a target="_blank" rel="noopener" href="https://zentia.github.io/2019/04/22/frame-sync/">帧锁定同步.按帧同步.状态同步</a></li>
<li>[4] <a target="_blank" rel="noopener" href="https://zhuanlan.zhihu.com/p/38468615">帧同步联机战斗（预测，快照，回滚）</a></li>
<li>[5] <a target="_blank" rel="noopener" href="https://zhuanlan.zhihu.com/p/21705866">Doom/Quake I/II/III网络模型演化</a></li>
<li>[6] <a target="_blank" rel="noopener" href="https://github.com/id-Software/DOOM">Doom源码</a></li>
<li>[7] <a target="_blank" rel="noopener" href="https://fabiensanglard.net/doom3_documentation/The-DOOM-III-Network-Architecture.pdf">The-DOOM-III-Network-Architecture</a></li>
<li>[8] <a target="_blank" rel="noopener" href="https://zhuanlan.zhihu.com/p/130702310">细谈网络同步在游戏历史中的发展变化</a></li>
</ul>

      
    </div>
    <footer class="article-footer">
      <a data-url="http://example.com/2021/01/23/2021/2021-02-23-%E5%B8%A7%E5%90%8C%E6%AD%A5%E5%92%8C%E7%8A%B6%E6%80%81%E5%90%8C%E6%AD%A5/" data-id="ckrn3an7b001d20xw2l371riq" class="article-share-link">Share</a>
      
      
  <ul class="article-tag-list" itemprop="keywords"><li class="article-tag-list-item"><a class="article-tag-list-link" href="/tags/Game/" rel="tag">Game</a></li></ul>

    </footer>
  </div>
  
    
<nav id="article-nav">
  
    <a href="/2021/03/06/2021/2021-03-06-ansible/" id="article-nav-newer" class="article-nav-link-wrap">
      <strong class="article-nav-caption">Newer</strong>
      <div class="article-nav-title">
        
          ansible笔记
        
      </div>
    </a>
  
  
    <a href="/2021/01/22/2021/2021-01-22-%E7%BA%BF%E6%80%A7%E4%BB%A3%E6%95%B0/" id="article-nav-older" class="article-nav-link-wrap">
      <strong class="article-nav-caption">Older</strong>
      <div class="article-nav-title">线性代数笔记</div>
    </a>
  
</nav>

  
</article>

</section>
        
          <aside id="sidebar">
  
    

  
    
  <div class="widget-wrap">
    <h3 class="widget-title">Tags</h3>
    <div class="widget">
      <ul class="tag-list" itemprop="keywords"><li class="tag-list-item"><a class="tag-list-link" href="/tags/3D/" rel="tag">3D</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/AI/" rel="tag">AI</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/C/" rel="tag">C++</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/Game/" rel="tag">Game</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/Go/" rel="tag">Go</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/Linux/" rel="tag">Linux</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/Math/" rel="tag">Math</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/Server/" rel="tag">Server</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/Unreal-Engine4/" rel="tag">Unreal Engine4</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/git/" rel="tag">git</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/golang/" rel="tag">golang</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/guitar/" rel="tag">guitar</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/node-js/" rel="tag">node.js</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/protobuf/" rel="tag">protobuf</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/python/" rel="tag">python</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/recast/" rel="tag">recast</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/redis/" rel="tag">redis</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/type/" rel="tag">type</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/vscode/" rel="tag">vscode</a></li><li class="tag-list-item"><a class="tag-list-link" href="/tags/%E8%BF%90%E7%BB%B4/" rel="tag">运维</a></li></ul>
    </div>
  </div>


  
    
  <div class="widget-wrap">
    <h3 class="widget-title">Tag Cloud</h3>
    <div class="widget tagcloud">
      <a href="/tags/3D/" style="font-size: 10px;">3D</a> <a href="/tags/AI/" style="font-size: 11.67px;">AI</a> <a href="/tags/C/" style="font-size: 15px;">C++</a> <a href="/tags/Game/" style="font-size: 18.33px;">Game</a> <a href="/tags/Go/" style="font-size: 13.33px;">Go</a> <a href="/tags/Linux/" style="font-size: 13.33px;">Linux</a> <a href="/tags/Math/" style="font-size: 11.67px;">Math</a> <a href="/tags/Server/" style="font-size: 16.67px;">Server</a> <a href="/tags/Unreal-Engine4/" style="font-size: 10px;">Unreal Engine4</a> <a href="/tags/git/" style="font-size: 10px;">git</a> <a href="/tags/golang/" style="font-size: 20px;">golang</a> <a href="/tags/guitar/" style="font-size: 10px;">guitar</a> <a href="/tags/node-js/" style="font-size: 10px;">node.js</a> <a href="/tags/protobuf/" style="font-size: 10px;">protobuf</a> <a href="/tags/python/" style="font-size: 10px;">python</a> <a href="/tags/recast/" style="font-size: 11.67px;">recast</a> <a href="/tags/redis/" style="font-size: 10px;">redis</a> <a href="/tags/type/" style="font-size: 10px;">type</a> <a href="/tags/vscode/" style="font-size: 10px;">vscode</a> <a href="/tags/%E8%BF%90%E7%BB%B4/" style="font-size: 16.67px;">运维</a>
    </div>
  </div>

  
    
  <div class="widget-wrap">
    <h3 class="widget-title">Archives</h3>
    <div class="widget">
      <ul class="archive-list"><li class="archive-list-item"><a class="archive-list-link" href="/archives/2021/07/">July 2021</a></li><li class="archive-list-item"><a class="archive-list-link" href="/archives/2021/06/">June 2021</a></li><li class="archive-list-item"><a class="archive-list-link" href="/archives/2021/04/">April 2021</a></li><li class="archive-list-item"><a class="archive-list-link" href="/archives/2021/03/">March 2021</a></li><li class="archive-list-item"><a class="archive-list-link" href="/archives/2021/01/">January 2021</a></li><li class="archive-list-item"><a class="archive-list-link" href="/archives/2020/12/">December 2020</a></li><li class="archive-list-item"><a class="archive-list-link" href="/archives/2020/11/">November 2020</a></li><li class="archive-list-item"><a class="archive-list-link" href="/archives/2019/03/">March 2019</a></li><li class="archive-list-item"><a class="archive-list-link" href="/archives/2018/11/">November 2018</a></li></ul>
    </div>
  </div>


  
    
  <div class="widget-wrap">
    <h3 class="widget-title">Recent Posts</h3>
    <div class="widget">
      <ul>
        
          <li>
            <a href="/2021/07/19/2021/2021-07-19-etcd-learn/">go-etcd阅读笔记</a>
          </li>
        
          <li>
            <a href="/2021/07/19/2021/2021-07-19-socketop-learn/">REUSEPORT-REUSEADDR-学习</a>
          </li>
        
          <li>
            <a href="/2021/06/22/2021/2021-06-22-go-ethereum-learn/">go-ethereum阅读笔记</a>
          </li>
        
          <li>
            <a href="/2021/06/21/2021/2021-06-21-server%E6%B5%8B%E8%AF%95%E5%B7%A5%E5%85%B7/">server测试工具</a>
          </li>
        
          <li>
            <a href="/2021/06/09/2021/2021-06-09-pprof-doc/">go-pprof</a>
          </li>
        
      </ul>
    </div>
  </div>

  
</aside>
        
      </div>
      <footer id="footer">
  
  <div class="outer">
    <div id="footer-info" class="inner">
      &copy; 2021 Abel Sean<br>
      Powered by <a href="http://hexo.io/" target="_blank">Hexo</a>
    </div>
  </div>
</footer>
    </div>
    <nav id="mobile-nav">
  
    <a href="/" class="mobile-nav-link">Home</a>
  
    <a href="/archives" class="mobile-nav-link">Archives</a>
  
</nav>
    

<script src="//ajax.googleapis.com/ajax/libs/jquery/2.0.3/jquery.min.js"></script>


  
<link rel="stylesheet" href="/fancybox/jquery.fancybox.css">

  
<script src="/fancybox/jquery.fancybox.pack.js"></script>




<script src="/js/script.js"></script>




  </div>
</body>
</html>